eval_batch_size:13107200, generate_setting:original, learning_rate:0.001, model:Observation, setting:source_passing, train_batch_size:4096
Valid result:
recall@5 : 0.1154    recall@10 : 0.1752    recall@20 : 0.2591    recall@50 : 0.4116    mrr@5 : (0.0688+0j)    mrr@10 : (0.0775+0j)    mrr@20 : (0.0837+0j)    mrr@50 : (0.0887+0j)    ndcg@5 : (0.0761+0j)    ndcg@10 : (0.0956+0j)    ndcg@20 : (0.1174+0j)    ndcg@50 : (0.149+0j)    hit@5 : 0.1314    hit@10 : 0.1981    hit@20 : 0.2893    hit@50 : 0.447    precision@5 : 0.0271    precision@10 : 0.021    precision@20 : 0.0159    precision@50 : 0.0103
Test result:
recall@5 : 0.1195    recall@10 : 0.1806    recall@20 : 0.2544    recall@50 : 0.4049    mrr@5 : (0.0789+0j)    mrr@10 : (0.088+0j)    mrr@20 : (0.0934+0j)    mrr@50 : (0.0983+0j)    ndcg@5 : (0.0837+0j)    ndcg@10 : (0.1034+0j)    ndcg@20 : (0.1226+0j)    ndcg@50 : (0.154+0j)    hit@5 : 0.14    hit@10 : 0.2088    hit@20 : 0.2882    hit@50 : 0.4413    precision@5 : 0.0297    precision@10 : 0.0227    precision@20 : 0.0162    precision@50 : 0.0104

eval_batch_size:13107200, generate_setting:original, learning_rate:0.001, model:Observation, setting:merge, train_batch_size:4096
Valid result:
recall@5 : 0.1141    recall@10 : 0.1765    recall@20 : 0.2524    recall@50 : 0.4017    mrr@5 : (0.069+0j)    mrr@10 : (0.0783+0j)    mrr@20 : (0.0839+0j)    mrr@50 : (0.0889+0j)    ndcg@5 : (0.076+0j)    ndcg@10 : (0.0965+0j)    ndcg@20 : (0.1163+0j)    ndcg@50 : (0.1475+0j)    hit@5 : 0.1292    hit@10 : 0.2001    hit@20 : 0.2821    hit@50 : 0.4371    precision@5 : 0.0266    precision@10 : 0.0211    precision@20 : 0.0155    precision@50 : 0.0101
Test result:
recall@5 : 0.1191    recall@10 : 0.1735    recall@20 : 0.2511    recall@50 : 0.3982    mrr@5 : (0.0784+0j)    mrr@10 : (0.0865+0j)    mrr@20 : (0.0923+0j)    mrr@50 : (0.0971+0j)    ndcg@5 : (0.0831+0j)    ndcg@10 : (0.1007+0j)    ndcg@20 : (0.121+0j)    ndcg@50 : (0.1517+0j)    hit@5 : 0.1393    hit@10 : 0.2005    hit@20 : 0.2843    hit@50 : 0.4343    precision@5 : 0.0295    precision@10 : 0.0219    precision@20 : 0.0161    precision@50 : 0.0103

eval_batch_size:13107200, generate_setting:original, learning_rate:0.0005, model:Observation, setting:merge, train_batch_size:4096
Valid result:
recall@5 : 0.0909    recall@10 : 0.1453    recall@20 : 0.2184    recall@50 : 0.3533    mrr@5 : (0.0535+0j)    mrr@10 : (0.0615+0j)    mrr@20 : (0.0671+0j)    mrr@50 : (0.0716+0j)    ndcg@5 : (0.0598+0j)    ndcg@10 : (0.0777+0j)    ndcg@20 : (0.0968+0j)    ndcg@50 : (0.1249+0j)    hit@5 : 0.1041    hit@10 : 0.1653    hit@20 : 0.2467    hit@50 : 0.3875    precision@5 : 0.0216    precision@10 : 0.0177    precision@20 : 0.0134    precision@50 : 0.0089
Test result:
recall@5 : 0.0948    recall@10 : 0.1465    recall@20 : 0.2168    recall@50 : 0.3525    mrr@5 : (0.0632+0j)    mrr@10 : (0.071+0j)    mrr@20 : (0.0762+0j)    mrr@50 : (0.0806+0j)    ndcg@5 : (0.0663+0j)    ndcg@10 : (0.0831+0j)    ndcg@20 : (0.1014+0j)    ndcg@50 : (0.1297+0j)    hit@5 : 0.1131    hit@10 : 0.1723    hit@20 : 0.2473    hit@50 : 0.3881    precision@5 : 0.0237    precision@10 : 0.0186    precision@20 : 0.0139    precision@50 : 0.0091

eval_batch_size:13107200, generate_setting:original, learning_rate:0.0005, model:Observation, setting:source_passing, train_batch_size:4096
Valid result:
recall@5 : 0.0892    recall@10 : 0.143    recall@20 : 0.2168    recall@50 : 0.3583    mrr@5 : (0.0551+0j)    mrr@10 : (0.0632+0j)    mrr@20 : (0.0687+0j)    mrr@50 : (0.0734+0j)    ndcg@5 : (0.0601+0j)    ndcg@10 : (0.0777+0j)    ndcg@20 : (0.0969+0j)    ndcg@50 : (0.1264+0j)    hit@5 : 0.1026    hit@10 : 0.1634    hit@20 : 0.2445    hit@50 : 0.3925    precision@5 : 0.0212    precision@10 : 0.0173    precision@20 : 0.0133    precision@50 : 0.009
Test result:
recall@5 : 0.0956    recall@10 : 0.1422    recall@20 : 0.2172    recall@50 : 0.3601    mrr@5 : (0.0625+0j)    mrr@10 : (0.0696+0j)    mrr@20 : (0.0752+0j)    mrr@50 : (0.0799+0j)    ndcg@5 : (0.0662+0j)    ndcg@10 : (0.0813+0j)    ndcg@20 : (0.1011+0j)    ndcg@50 : (0.1307+0j)    hit@5 : 0.1144    hit@10 : 0.1677    hit@20 : 0.2475    hit@50 : 0.3949    precision@5 : 0.0239    precision@10 : 0.018    precision@20 : 0.0139    precision@50 : 0.0093

